Arenadata QuickMarts (ADQM)

Продукт
Название базовой системы (платформы): ClickHouse - система управления базами данных (СУБД)
Разработчики: Arenadata (Аренадата Софтвер)
Дата премьеры системы: 2019/11/19
Дата последнего релиза: 2023/06/27
Технологии: BI,  СУБД

Содержание

Основные статьи:

Arenadata QuickMarts (ADQM) — кластерная колоночная система управления базами данных (СУБД). С её помощью можно в режиме реального времени генерировать аналитические отчёты различного плана, используя большие объёмы информации.

2024

Совместимость с Polymatica Dashboards

Компании SL Soft и Arenadata заявили о совместимости своих продуктов – конструктора информационных панелей Polymatica Dashboards и систем управления базами данных Arenadata QuickMarts (ADQM) и Arenadata DB (ADB). Об этом Softline сообщил 8 августа 2024 года. Подробнее здесь.

Доступность в облаке MWS

МТС, цифровая экосистема, 26 июля 2024 года сообщила о заключении стратегического партнерства между MTS Web Services (MWS), входит в группу МТС, и Arenadata. В рамках договора MWS запустил пять сервисов на программных продуктах от Arenadata, в том числе и Arenadata QuickMarts (ADQM). Подробнее здесь.

Подтверждение соответствия требованиям к УД 4 ФСТЭК России

ФСТЭК России подтвердил соответствие аналитической СУБД Arenadata DB (ADB) и кластерной колоночной СУБД Arenadata QuickMarts (ADQM) требованиям к 4 уровню доверия средств обеспечения безопасности информационных технологий (УД 4). Ранее оба продукта были сертифицированы по 6 уровню доверия и технических условий. Об этом разработчик сообщил 8 июля 2024 года. Подробнее здесь.

Инструмент для очень быстрой бизнес-аналитики

На современном рынке можно найти множество вариантов специализированных СУБД, разработанных для эффективного решения определенных задач. Одной из таких СУБД является продукт Arenadata QuickMarts (ADQM), разработанный на базе технологии с открытым исходным кодом ClickHouse. Как показывают результаты проведенного синтетического теста и опыт реального использования, ClickHouse и ADQM могут выполнять аналитические запросы в разы быстрее, чем многие другие решения и технологии, присутствующие на международном и российском рынке. Чем еще ADQM отличается от похожих продуктов, где применяется и каких результатов помогает достичь бизнесу, расскажем в этой статье. Подробнее здесь.

Интеграция с PIX BI

Arenadata и PIX Robotics выводят на рынок технологический бандл, состоящий из комплекта лицензий на систему бизнес-анализа PIX BI и кластерную колоночную СУБД Arenadata QuickMarts (ADQM). Совместное решение позволит создавать аналитические отчёты в высоконагруженной и отказоустойчивой среде, используя большие объёмы данных. Об этом PIX Robotics сообщили 18 июня 2024 года. Подробнее здесь.

Доступность из облака «Крок»

Крок Облачные сервисы и Arenadata заключили соглашение о партнёрстве, по которому продукты Arenadata стали частью услуг, предоставляемых заказчикам на базе Облака КРОК. В частности, клиентам облачного провайдера теперь доступно решение Arenadata QuickMarts (ADQM). Об этом Крок сообщил 17 января 2024 года. Подробнее здесь.

2023

Доступность в облаке Cloud.ru

Провайдер облачных и AI-технологий Cloud.ru стал стратегическим партнёром российского вендора ПО для хранения и обработки данных Arenadata. Теперь продукты Arenadata можно использовать в облаке Cloud.ru. Об этом Arenadata сообщила 29 августа 2023 года.

Как уточнили TAdviser представители Arenadata, в облаке Cloud.ru доступны следующие продукты компании: ADB - Arenadata DB, ADH (Arenadata Hadoop), ADQM (Arenadata QuickMarts) и ADS (Arenadata Streaming). Подробнее здесь.

Доступность в beeline cloud

Экосистема продуктов Arenadata теперь доступна клиентам облачного провайдера beeline cloud. Об этом компания Arenadata сообщила 3 августа 2023 года. Как уточнили TAdviser представители Arenadata, в числе продуктов, доступных через beeline cloud: Arenadata DB, Arenadata Hadoop, Arenadata Streaming, Arenadata Postgres, Arenadata QuickMarts и Arenadata Cluster Manager. Подробнее здесь.

Совместимость с платформой Rubbles MLOps Suite

ИТ-компании Rubbles и Arenadata обеспечили совместимость своих программных продуктов. Теперь платформа Rubbles MLOps Suite и решения для хранения и обработки данных Arenadata могут работать бесшовно в едином программном комплексе. Об этом компания Arenadata сообщила 19 июля 2023 года.

Единый программный комплекс объединяет MLOps-решения Rubbles и продукты Arenadata, в том числе и Arenadata QuickMarts. Подробнее здесь.

Получение сертификата соответствия ФСТЭК по требованиям 6-го уровня доверия и технических условий

Arenadata QuickMarts (ADQM) получил сертификат соответствия ФСТЭК РФ №4682 от 8 июня 2023 года. Теперь колоночная СУБД корпоративного уровня, построенная на базе Open source технологии, соответствует самым высоким законодательным требованиям к отечественным решениям. Об этом компания Arenadata (Аренадата Софтвер) сообщила 27 июня 2023 года.

Документ удостоверяет, что Arenadata QuickMarts сертифицирована по требованиям 6-го уровня доверия и технических условий. Согласно сертификату, ADQM соответствует требованиям по безопасности информации, установленным в документе «Требования по безопасности информации, устанавливающие уровни доверия к средствам технической защиты информации и средствам обеспечения безопасности информационных технологий».

На основе технических заключений Arenadata QuickMarts внесена в государственный реестр системы сертификации средств защиты информации по требованиям безопасности информации от 8 июня 2023 года. Полученный сертификат ФСТЭК действителен до 8 июня 2028 года.

«
Arenadata QuickMarts стала второй СУБД от Arenadata, получившей сертификат соответствия ФСТЭК. Наши действующие и потенциальные клиенты благодаря этому могут не только выполнить предъявляемые к ним требования по информационной безопасности, но и выбирать, с помощью какой именно из наших сертифицированных технологий это сделать, — отметил Александр Ермаков, технический директор Arenadata.
»

Совместимость с PIX BI

30 мая 2023 года компания PIX Robotics сообщила о заключении партнерского соглашения с компанией Arenadata.

Технологическое сотрудничество позволит заказчикам развертывать PIX BI в высоконагруженных и отказоустойчивых системах Arenadata с совместной поддержкой вендоров.

Сотрудничество компаний направлено на развитие и подтверждает совместимость системы умного анализа данных PIX BI и стека технологий Arenadata.

Программные продукты Arenadata эффективно замещают аналитические и транзакционные СУБД западных производителей. В технологический стек Arenadata входит колочная СУБД корпоративного уровня Arenadata QuickMarts (ADQM), созданная на базе Open source проекта ClickHouse. Этот продукт используется как проприетарное хранилище PIX BI. Заказчики, которые будут развертывать PIX BI именно на Arenadata QuickMarts, получат совместимую, высоконагруженную, отказоустойчивую систему и надежную поддержку двух вендоров.

«
Сотрудничество с Arenadata — важный этап развития PIX BI. Мы используем актуальные стандарты технологий бизнес-аналитики, в том числе аналитическое хранилище ClickHouse, которое является свободным программным обеспечением. Теперь наши клиенты могут использовать ClickHouse в рамках платформы Arenadata, таким образом получать полноценный коммерческий продукт с гарантией стабильности, отказоустойчивости и своевременной технологической поддержки от одного из лидеров рынка, что особенно важно для крупных компаний, — отметил Сергей Белостоцкий, владелец продукта PIX BI, компания PIX Robotics.
»

«
PIX Robotics — востребованный российский BI-вендор, предоставляющий бизнес-пользователям инструмент для анализа данных. В enterprise-сегменте для работы с большими данными им стала Arenadata. И мы видим в такой синергии большие перспективы, — отметил Антон Мартынов, директор по работе с партнёрами Arenadata.
»

В первую очередь, технологическое сотрудничество между PIX Robotics и Arenadata актуально для enterprise-компаний. Первые проекты по развертыванию хранилища PIX BI в Arenadata планируются в компаниях финансового, промышленного сегментов и ритейла.

2020: Основа и особенности Arenadata QuickMarts

По информации на январь 2020 года в основе Arenadata QuickMarts лежит ClickHouse от компании "Яндекс", который постоянно дорабатывается компанией Arenadata. Например, в продукт были включены:

  • авторизация пользователей;
  • разграничение доступов;
  • поддержка ORC;
  • поддержка интеграции с Kerberos Hadoop.

ADQM также дополнена корпоративной поддержкой и обучающими курсами. Помимо этого, она входит в цифровую экосистему Arenadata.

Особенности системы: Простота развёртывания из Arenadata Cluster Manager. Мониторинг всех важных метрик. Репликация данных и оптимальные распределённые запросы. Гибкая схема вертикального и горизонтального масштабирования. Наличие российской поддержки. Оперативная доработка и развитие функционала. Вычисление предиктов моделей машинного обучения на своём кластере ClickHouse. SQL с большим количеством расширений. Отказоустойчивость за счёт использования асинхронной multimaster репликации и ZooKeeper.

Векторная обработка данных на C++ и их оптимизированное хранение позволяют нам получать высокую скорость обработки информации для выполнения аналитических запросов. Как показывают результаты проведённого сравнения, ADQM в 2,5 раза быстрее формирует основные аналитические отчёты, чем другие решения, присутствующие на российском рынке.

По утверждению разработчиков, Arenadata QuickMarts поможет сэкономить на хранении данных, поскольку система оптимизирована для работы на жёстких дисках. Также при возможности, можно использовать SSD и дополнительную оперативную память.

В каких отраслях уже применяется Arenadata QuickMarts: веб-аналитика; реклама и RTB; телекоммуникация; информационная безопасность; мониторинг технических и бизнес-метрик; онлайн-игры; интернет вещей.

2019: Выпуск на рынок

Компания Arenadata 19 ноября 2019 года представила корпоративную СУБД Arenadata QuickMarts, разработанную на базе ClickHouse от компании "Яндекс". Она позволит очень быстро анализировать большие объёмы данных и одновременно снижать нагрузку на систему их [[[хранение данных|хранения]].

Arenadata QuickMarts - это кластерная колоночная система, с помощью которой можно в режиме реального времени генерировать аналитические отчёты различного плана, используя большие объёмы информации.

Особенностями продукта разработчики назвали:

  • наличие корпоративной поддержки и обучающих курсов;
  • enterprise-возможности, включающие, например, систему авторизации и аутентификации, поддержку ORC и интеграцию с Kerberos Hadoop.

Arenadata QuickMarts позволит получать доступ к хранилищам данных в 20 раз быстрее, чем классическая СУБД, хранить широкие витрины и таблицы фактов.

«
СУБД Arenadata QuickMarts существенно расширила возможности стека технологий Arenadata по предоставлению пользователям, как людям, так и системам, доступа к информации в корпоративных хранилищах данных. И теперь доступ к данным могут получить десятки тысяч пользователей в режиме реального времени, — рассказал Дмитрий Павлов, директор по продуктам компании Arenadata.
»





Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Прогноз (250)
  Loginom Company (ранее BaseGroup Labs Аналитические технологии) (125)
  RBC Group Украина (124)
  БизнесАвтоматика НПЦ (119)
  Консультационная группа АТК (100)
  Другие (2519)

  Сапиенс солюшнс (Sapiens solutions) (9)
  Форсайт (8)
  Navicon (Навикон) (7)
  Корус Консалтинг (6)
  Доверенная среда (5)
  Другие (101)

  БизнесАвтоматика НПЦ (12)
  Форсайт (8)
  ФТО (5)
  Manzana Group (М Софт) (4)
  Optimacros (Оптимакрос) (3)
  Другие (74)

  Manzana Group (М Софт) (5)
  БизнесАвтоматика НПЦ (5)
  Инфомаксимум (Infomaximum) (5)
  Analytic Workspace (ОСТ) (4)
  Arenadata (Аренадата Софтвер) (4)
  Другие (66)

  Simetra (ранее А+С Транспроект) (9)
  БизнесАвтоматика НПЦ (7)
  GlowByte, ГлоуБайт (ранее Glowbyte Consulting, ГлоуБайт Консалтинг) (5)
  Arenadata (Аренадата Софтвер) (4)
  Инфомаксимум (Infomaximum) (3)
  Другие (47)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Qlik (QlikTech) (59, 464)
  Форсайт (19, 332)
  SAP SE (70, 303)
  Oracle (65, 267)
  Loginom Company (ранее BaseGroup Labs Аналитические технологии) (4, 236)
  Другие (1113, 1633)

  SAP SE (6, 13)
  Qlik (QlikTech) (2, 8)
  Форсайт (2, 8)
  Microsoft (2, 6)
  Доверенная среда (1, 5)
  Другие (50, 78)

  БизнесАвтоматика НПЦ (1, 12)
  Форсайт (3, 8)
  Optimacros (Оптимакрос) (1, 6)
  Microsoft (1, 5)
  Manzana Group (М Софт) (3, 4)
  Другие (40, 50)

  Optimacros (Оптимакрос) (1, 10)
  Форсайт (2, 8)
  Manzana Group (М Софт) (2, 5)
  Analytic Workspace (ОСТ) (2, 5)
  PIX Robotics (Пикс Роботикс) (1, 5)
  Другие (37, 59)

  Simetra (ранее А+С Транспроект) (1, 9)
  БизнесАвтоматика НПЦ (1, 7)
  SL Soft (СЛ Софт) (5, 6)
  Полиматика (Polymatica) (5, 6)
  VMware (2, 6)
  Другие (29, 51)

Распределение базовых систем по количеству проектов, включая партнерские решения (проекты, партнерские проекты)

За всю историю
2021 год
2022 год
2023 год
Текущий год

  QlikView - 411 (370, 41)
  Форсайт. Аналитическая платформа (ранее Prognoz Platform) - 333 (318, 15)
  Deductor - 226 (226, 0)
  IBM Cognos - 162 (58, 104)
  Visary BI Платформа бизнес-аналитики - 119 (119, 0)
  Другие 1283

  SAP NetWeaver Business Warehouse (SAP BW/4HANA) - 8 (8, 0)
  Форсайт. Аналитическая платформа (ранее Prognoz Platform) - 8 (7, 1)
  QlikView.Next - 6 (0, 6)
  Microsoft Power BI - 5 (5, 0)
  Доверенная среда: Триафлай BI-платформа - 5 (5, 0)
  Другие 64

  Visary BI Платформа бизнес-аналитики - 12 (12, 0)
  Форсайт. Аналитическая платформа (ранее Prognoz Platform) - 8 (5, 3)
  Optimacros Платформа для оптимизационного и консолидационного планирования - 6 (6, 0)
  Microsoft Power BI - 5 (5, 0)
  QlikView.Next - 4 (0, 4)
  Другие 35

  Optimacros Платформа для оптимизационного и консолидационного планирования - 10 (10, 0)
  Форсайт. Аналитическая платформа (ранее Prognoz Platform) - 8 (7, 1)
  Инфомаксимум: Proceset (Система класса Process mining) - 5 (5, 0)
  PIX BI - 5 (5, 0)
  Analytic Workspace BI-платформа - 5 (3, 2)
  Другие 38

  TransInfo - 9 (0, 9)
  Visary BI Платформа бизнес-аналитики - 7 (7, 0)
  VMware Tanzu Greenplum - 6 (1, 5)
  Optimacros Платформа для оптимизационного и консолидационного планирования - 6 (6, 0)
  Polymatica Analytics Аналитическая платформа - 5 (2, 3)
  Другие 19

Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  SAP CIS (САП СНГ) (38)
  Softline (Софтлайн) (35)
  РДТЕХ (33)
  BeringPro (БерингПойнт) ранее BearingPoint Russia (28)
  ФОРС - Центр разработки (25)
  Другие (733)

  Сапиенс солюшнс (Sapiens solutions) (7)
  BeringPro (БерингПойнт) ранее BearingPoint Russia (3)
  Navicon (Навикон) (3)
  Softline (Софтлайн) (2)
  Wone IT (ранее SoftwareONE Россия, СофтвэрУАН и Awara IT Russia, Авара Ай Ти Солюшенс) (2)
  Другие (35)

  Группа Борлас (Borlas) (1)
  Диасофт (Diasoft) (1)
  КРИТ (KRIT) (1)
  Arenadata (Аренадата Софтвер) (1)
  Корус Консалтинг (1)
  Другие (20)

  Arenadata (Аренадата Софтвер) (5)
  Тантор Лабс (Tantor Labs) (3)
  ФОРС - Центр разработки (2)
  Инфорион (1)
  Ит1-Холдинг (IT-One) (1)
  Другие (18)

  Arenadata (Аренадата Софтвер) (5)
  Диасофт (Diasoft) (2)
  GlowByte, ГлоуБайт (ранее Glowbyte Consulting, ГлоуБайт Консалтинг) (2)
  НПП СпецТек (Spectec) (1)
  РДТЕХ (1)
  Другие (16)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Oracle (44, 179)
  SAP SE (6, 178)
  Microsoft (23, 142)
  PostgreSQL Global Development Group (14, 126)
  Постгрес профессиональный (ППГ, Postgres Professional) (6, 40)
  Другие (263, 243)

  SAP SE (3, 11)
  Microsoft (3, 11)
  PostgreSQL Global Development Group (3, 10)
  Oracle (2, 4)
  Постгрес профессиональный (ППГ, Postgres Professional) (2, 3)
  Другие (10, 13)

  PostgreSQL Global Development Group (4, 9)
  Постгрес профессиональный (ППГ, Postgres Professional) (2, 6)
  VK Tech (ранее VK Цифровые технологии, ВК Цифровые технологии и Mail.ru Цифровые технологии) (2, 3)
  Arenadata (Аренадата Софтвер) (3, 2)
  Apache Software Foundation (ASF) (2, 2)
  Другие (9, 9)

  PostgreSQL Global Development Group (3, 13)
  Постгрес профессиональный (ППГ, Postgres Professional) (1, 6)
  Arenadata (Аренадата Софтвер) (3, 5)
  Apache Software Foundation (ASF) (3, 4)
  Тантор Лабс (Tantor Labs) (2, 3)
  Другие (8, 10)

  PostgreSQL Global Development Group (4, 11)
  Arenadata (Аренадата Софтвер) (3, 6)
  VMware (2, 6)
  Постгрес профессиональный (ППГ, Postgres Professional) (2, 5)
  Диасофт (Diasoft) (1, 3)
  Другие (6, 7)

Распределение базовых систем по количеству проектов, включая партнерские решения (проекты, партнерские проекты)

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Oracle Database - 143 (106, 37)
  Microsoft SQL Server - 135 (104, 31)
  PostgreSQL СУБД - 126 (80, 46)
  SAP NetWeaver Business Warehouse (SAP BW/4HANA) - 103 (103, 0)
  SAP HANA (High Performance Analytic Appliance) - 76 (72, 4)
  Другие 74

  PostgreSQL СУБД - 10 (7, 3)
  Microsoft SQL Server - 10 (9, 1)
  SAP NetWeaver Business Warehouse (SAP BW/4HANA) - 8 (8, 0)
  Oracle Database - 3 (3, 0)
  SAP HANA (High Performance Analytic Appliance) - 3 (3, 0)
  Другие 6

  PostgreSQL СУБД - 9 (2, 7)
  Tarantool Платформа in‑memory вычислений - 3 (2, 1)
  Oracle Database - 3 (2, 1)
  VMware Tanzu Greenplum - 2 (0, 2)
  Firebird (database server) - 1 (0, 1)
  Другие -6

  PostgreSQL СУБД - 13 (4, 9)
  VMware Tanzu Greenplum - 3 (0, 3)
  Apache Hadoop - 2 (1, 1)
  ClickHouse - система управления базами данных (СУБД) - 2 (2, 0)
  Apache Kafka - 2 (2, 0)
  Другие -9

  PostgreSQL СУБД - 11 (5, 6)
  VMware Tanzu Greenplum - 5 (0, 5)
  Diasoft Digital Q.Database - 3 (3, 0)
  Apache Hadoop - 2 (0, 2)
  Сбер Platform V Pangolin - 2 (2, 0)
  Другие -10